Повышение эффективности обработки жестового языка посредством малокадрового машинного обучения
Аннотация:
Предмет исследования. Повышение эффективности коммуникации глухих и слабослышащих людей путем обработки жестового языка средствами искусственного интеллекта – важная задача в социальном и в технологическом планах. Одним из направлений решения этой проблемы является применение достаточно дешевого и доступного маркерного метода. Метод. Метод основан на регистрации электромиографических сигналов мышц, регистрируемых с помощью браслета, надеваемого на руку. Для повышения качества распознавания жестов применяется модификация маркерного метода, сущность которого состоит в дублировании датчиков электромиографических сигналов в сочетании с малокадровым подходом машинного обучения. Основные результаты. Экспериментально изучены возможности повышения качества обработки жестового языка за счет дублирования электромиографических датчиков и уменьшения набора данных, необходимого для машинного обучения. Выполнено сравнение нескольких технологий малокадрового подхода. Показано, что при обучении малокадровых нейронных сетей на наборе данных объемом 56 000 образцов можно достичь лучших результатов, чем при обучении классификатора типа «случайный лес» на наборе данных объемом 160 000 образцов. Практическая значимость. Использование минимального количества датчиков электромиографических сигналов в сочетании с малокадровыми методами их обработки обеспечивает возможность организации быстрого и экономичного взаимодействия с людьми с нарушениями слуха и речи.
Ключевые слова:
Постоянный URL
Статьи в номере
- Методы аудиовизуального распознавания людей в масках
- Влияние соотношения интенсивностей опорной и объектной волн на распределение интенсивности в формируемом с их помощью голографическом поле
- Высокоточный волоконно-оптический датчик температуры на основе интерферометра Фабри–Перо с отражающими тонкопленочными многослойными структурами
- Метод проектирования оптической системы для концентрации излучения мощных светодиодов
- Обнаружения выбоин на дорожных покрытиях с использованием методов фотограмметрии и дистанционного зондирования
- Адаптивное управление нелинейным объектом с несогласованными параметрическими неопределенностями и ограничением на входное воздействие
- Применение методов детектирования отказов для обнаружения информационных атак на систему управления
- Алгоритм детектирования и локализации отказов двигателя постоянного тока
- Синтез и реализация λ -подхода скользящего управления в системе теплопотребления
- Фотокаталитические свойства наноструктур Ag–AgBr в ионообменном слое натриево-цинк-алюмосиликатного стекла с бромом
- Формализация языков частично упорядоченных мультимножеств в системе Coq для спецификации слабых моделей памяти
- Облачная интеллектуальная система мониторинга для обнаружения нарушений маски и выдачи предупреждений
- Эффективная инкрементная хеш-цепочка с вероятностным методом на основе фильтра для обновления легких узлов блокчейна
- Метод генерации масок на изображениях лиц и системы их распознавания
- Комплекснозначное разложение матричных данных на принципах квантовой теории
- Моделирование базового переводчика индонезийского языка жестов на одноплатном компьютере Raspberry Pi
- Метод многомодального машинного сурдоперевода для естественного человеко-машинного взаимодействия
- Веб-приложение для быстрой оценки субъективных ответов с использованием обработки естественного языка
- Обоснование путей построения и оценка эффективности применения пространственно распределенной системы информационных сенсоров для мониторинга обстановки
- Мониторинг инфильтрационных процессов в гидротехнических сооружениях с использованием распределенного акустического сенсора
- Конструкция волноводной антенны с прорезями для морской радиолокационной системы